OneLLM एक मल्टी-मोडल एलाइनमेंट यूनिफाइड फ्रेमवर्क है जो सामान्य एन्कोडर और एकीकृत प्रक्षिप्ति मॉड्यूल का उपयोग करता है ताकि LLM के साथ मल्टी-मोडल इनपुट को संरेखित किया जा सके। यह छवियों, ऑडियो, वीडियो और अन्य विभिन्न मोड डेटा की समझ का समर्थन करता है। प्रयोगों से पता चला है कि यह कई कार्यों में मौजूदा विधियों की तुलना में बेहतर प्रदर्शन करता है और इसमें काफी मजबूत जीरो-शॉट क्षमता है।